package com.xbai.spark.core.action

import org.apache.spark.rdd.RDD
import org.apache.spark.{SparkConf, SparkContext}

/**
  * collect() 算子
  * 作用：在驱动程序中，以数组的形式返回数据集的所有元素
  * 案例：创建一个 RDD，并将 RDD 内容收集到 Driver 端打印
  *
  * @author xbai
  * @Date 2020/12/31
  */
object Spark02_Collect {

  def main(args: Array[String]): Unit = {
    val conf: SparkConf = new SparkConf().setMaster("local[*]").setAppName("collect")
    val sc = new SparkContext(conf)

    val rdd: RDD[Int] = sc.parallelize(1 to 10)
    val arr: Array[Int] = rdd.collect()
    println(arr.mkString(","))
    sc.stop()
  }
}
